Evaluating Scaffolding-Oriented Multi-Agent Large Language Model System for Clinical Interview Training
面向支架式教学的多智能体LLM临床访谈训练系统评估
🧭 多智能体协作 · 教育训练
The Ohio State University · Hong Kong University of Science and Technology · Southern University of Science and Technology · Johns Hopkins University · Guangzhou Medical University
多智能体 AI 标准化病人系统通过患者/导师/逐轮评估分工与渐进式提示，提升医学生沟通、共情与病史采集过程质量，但不抬高诊断准确率
📌 工作参考价值（4 点）
- 多智能体角色分离：患者 / 导师 / 逐轮评估 agent 各司其职，避免单模型同时扮演多角色导致目标冲突。电商客服培训、对话式推荐沙盒可拆分为用户模拟、导购教练、质检 agent，提升训练可控性。
- 过程性反馈不透露总分：turn-level evaluator 只反馈行为进展，不暴露最终分数，减少 reward hacking。推荐 Agent 训练中可引入仅过程奖励或隐藏最终指标，让模型更关注交互质量。
- 苏格拉底式提示与渐进信息披露：tutor agent 用追问引导而非直接给答案，可用在智能导购 / 客服培训中，通过逐步追问用户需求、商品属性，训练 Agent 的提问与推理能力。
- 细粒度评估指标：OSCE 对齐的沟通、共情、病史采集行为分项改进，即使诊断准确率无差异。电商对话系统可借鉴构建 turn-level 过程评估，衡量提问覆盖率、共情表达等，而不仅看转化。